HDFS相关论文
智能化的运维系统借助大数据处理进行数据筛选、分类再结合人工智能算法,最终为整个播出监测系统提供安全可靠的运维信息、分析信息......
开源镜像站是一个放置开源系统镜像文件的站点,免费提供镜像文件和一些常用软件包下载。构建校园网内部的开源软件镜像站点,能更好地......
HDFS(Hadoop Distributed File System)默认随机选择副本存储位置,未充分考虑数据节点的差异性。文章提出了一种改进的数据存放策略,使......
为了有效提高非结构化数据处理的效率,本研究围绕MapReduce框架、Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)、Hado......
HDFS是Hadoop中一个高容错性的框架,其核心功能是进行数据的分布式存储,它一般被部署在廉价的机器上,提供高吞吐量来访问程序的数......
伴随着互联网技术的迅猛发展,云计算作为当前重要的研究方向,国内外产生了丰富的云计算产品,如阿里云,华为云以及亚马逊的AWS等。......
浙江省历史存档的不同遥感平台、传感器、时相以及分辨率的海量影像数据,缺乏一种高效的存储管理方法。为了满足用户的高并发、多样......
随着我国经济和城镇化建设全面发展,建筑业蓬勃发展,高层建筑和超高层建筑的建设需求日益增多,这类建筑的外墙装修、维护、清洗等......
伴随着信息技术以及各种互联网企业的迅猛发展,面对爆炸的数据以及种类繁多的新业务,传统老旧的运维方式已经不能满足一个大型企业......
随着大数据时代的深入发展,信息过载现象让人们难以在互联网中找到符合自己兴趣的信息。推荐系统由此出现,不仅能帮助用户筛选出喜......
近年来,随着国内经济的快速发展和科研探索在幼教领域的进展,我国对教育行业的重视让幼教市场的规模逐渐扩大。而当前面向幼教领域......
随着科技发展和工业制造业企业的转型升级,许多传统企业在生产数据的采集上的弊端不断显现出来,许多生产数据都是通过人工抄表的方......
随着大数据、人工智能、云计算等技术的快速发展,电子商务、商业智能、大数据分析等技术的市场化应用,针对于海量数据存储有了较高......
随着我国电网规模的逐渐扩大,电网中数据的结构变得越来越复杂。虽然给电网带来了显著的优势,但是也给电网带来了一些风险。电网中......
Github已经成为当下最受欢迎的开源代码托管平台,越来越多的开发人员和企业将项目上传到Github平台上。开发人员由于疏忽和安全意......
物联网和云计算技术发展,促进了大数据时代到来,大数据技术经过十几年的发展逐步走向稳定、成熟。基于Hadoop框架模式下对3台主机,......
校园云盘信息管理系统采用HDFS、HBase作为文件存储系统,高可用框架的MySgl数据库保存文件元数据,保证元数据安全,通过HDFS和MySQL......
随着信息技术的发展,存储系统占有举足轻重的地位。在数据爆炸性增长的今天,本地的存储很难满足不断增长的海量存储的需要,而且个......
随着互联网技术和多媒体技术的迅猛发展,网络技术和教育技术日益融合,由此构成了一种新兴的教育方式—远程教育。远程教育已成为现代......
车联网系统能极大的改善城市的交通状况,但是它会产生大量的数据,如何存储海量的车联网数据成了一项艰巨的挑战,而云计算可以提供......
随着计算机技术、远程技术和网络技术的高速发展,数字图书馆系统得到了广泛的研究。本文是以县级市数字图书馆为开发背景,开发本系......
我国土地广袤、地质和地理环境复杂,地质灾害种类多、分布广、危害大。为了减少地质灾害的损失,保护人民生命财产的安全,需要收集......
在当今社会,伴随着社交网络、物联网、互联网等技术的普及,全球数据信息正以指数级的速度爆炸性增长。而数据的存储量也由TB、PB到......
随着互联网技术在各个领域的不断渗透,互联网医疗逐渐成为人们生活中的一部分。医疗数据也从各个方面涌现出来,电子病历(Electroni......
HDFS(Hadoop Distributed File System)能够为海量数据提供分布式数据存储解决方案,但是HDFS设计之初是面向TB级别的大文件,当文件......
随着集成电路技术的发展,面向微米级微生物检测的便携式高精度显微成像设备已经成为相关领域的研究方向。在实际使用中此类设备可......
随着信息技术的不断向前发展,以及IT技术与传统行业互相碰撞与融合,促使当今的数据量出现爆发式增长,使得数据存储规模远远超过物......
随着科学技术的快速发展,云计算、社会网络、物联网等新兴技术为人们的工作以及日常生活带来了巨大的方便,与此同时数据的数量和类......
HDFS(Hadoop Distributed File System)是Hadoop的底层文件系统,负责海量数据的存储。一般而言,HDFS存储文件大小为PB甚至TB级别时......
随着整个社会的信息化程度的不断提高,信息在现代人的日常生活中扮演着愈发重要的角色。连续序列模式挖掘算法可从目标序列中发现......
随着云计算、大数据领域的发展,对分布式系统的应用与要求越来越多,面对的应用环境也越来越复杂。Hadoop分布式系统是当前主流的分......
随着大数据时代的到来,互联网环境中的数字图像呈现爆炸式增长。近年来,攻击者将恶意代码或程序隐藏在图像中并进行大规模分发,数......
随着通信技术、网络技术和移动互联网技术的不断发展,人们生活水平日益提高,休闲娱乐的方式也发生了翻天覆地的变化,不仅通过电视......
针对大数据采集工作面临的数据来源多样性、异构性、不稳定性等复杂问题,提出一种基于Flume、Kafka、HDFS等大数据组件设计的一个......
现今是互联网新时代,各种高新技术飞速发展,包括电商、自媒体、新闻媒体、社交平台等都到了新的层次。随着计算机技术的飞速发展,5......
随着互联网技术的飞速发展,互联网中的数据总量不断攀升,数据已经成为重要的国家基础性战略资源。由于传统存储系统难以突破存储容......
随着我国广电信息技术与产业的快速发展,广电节目内容与视频服务日益丰富。为了避免大屏电视交互中用户发现和匹配个性化内容效率......
随着信息技术的不断发展,图像数据的存储量日趋增加,如何科学解决海量图像数据的存储问题,能够快速地发现和提取图像的特征,并实现......
随着互联网的高速发展,各类社交网络、电商网络、在线文档平台呈现爆发式增长。与此同时,网络数据量中的图片、文本文档、音视频等......
网络对讲机因其价格低、通话质量优和通信距离长等优点,被广泛地应用到工业、安保和消防等领域。随着网络对讲用户数剧增,原有网络......
随着互联网技术的高速发展及互联网应用的快速增加,使得网络上数据量呈爆炸式增长,大规模数据存储、访问随之成为大数据领域的研究......
随着近年来全球变暖、温室效应等问题的日益严重,探索气候变化机理、预测气候变化趋势成为了学界重点研究的方向。陆地碳循环模型......